EPIC: Explicit Posterior Item Conditioning for Semantic ID Diffusion Recommendation
显式后验物品条件化的语义 ID 扩散推荐
🧭 生成式推荐 · 语义 ID 扩散去噪 ★ 深度解读
VinUniversity · Griffith University · Aalborg University
在语义 ID 扩散解码中显式构造可行物品后验并回注 token logits,使物品竞争在目标仍可达时发挥作用
📌 工作参考价值(4 点)
- 在生成式推荐/SID 模型的迭代解码里,不要只盯着 token logits:每个中间状态可以用倒排索引或字典树快速得到与已解析 SID 一致的候选商品集合,显式计算 item posterior 再边际化回未解析位置。这能减少早期 token 决策误杀高潜商品的问题,尤其适合候选集较大的电商目录。
- 训练时用 frozen backbone + 轻量 adapter,只在候选集大小 2~M 的 frontier 状态做 item-level 监督,并用 SID 或语义编码距离给 heavily masked 状态做软标签。新增参数很少(论文中 0.39M),线上仅多一次候选扫描和 attention,不增加 backbone forward,适合在已有排序/生成模型上增量上线。
- 要把候选 proposal 和偏好打分分离:候选集剪枝可以用 backbone token likelihood,但 item posterior 的 energy 不要再加 token likelihood,否则会重复使用同一信号并损害 ranking。融合 token 和 item 证据时,可用 signed log-residual + ambiguity-aware gate,而不是简单凸混合。
- 历史交互建模使用 candidate-conditioned transition evidence:让每个候选商品与用户最近 K 个交互做 attention,并拼 element-wise product 和 absolute difference 特征,使不同候选从不同历史获得支持;这比单一 pooled history vector 更有区分度,可用于电商中的下一件购买、搭配推荐或广告候选打分。